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Office 
Box PCT 
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Date of mailing (day/month/year) 
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International application No. 
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Applicant's or agent's file reference 
P111804/FTP/U 


International filing date (day/month/year) 

13 November 1999 (13.11.99) 


Priority date (day/month/year) 

14 November 1998 (14.11.98) 


Applicant 

JANSSEN, Reinhard et al 



1. The designated Office is hereby notified of its election made: 

| X | in the demand filed with the International Preliminary Examining Authority on: 

27 May 2000 (27.05.00) 



| | in a notice effecting later election filed with the International Bureau on: 



The election 



□ 



was not 



made before the expiration of 19 months from the priority date or, where Rule 32 applies, within the time limit under 
Rule 32.2(b). 



The International Bureau of WiPO 


Authorized officer 


34, chemin des Colombettes 


Henrik Nyberg 


1211 Geneva 20, Switzerland 


Facsimile No.: (41-22) 740.14.35 


Telephone No.: (41-22) 338.83.38 



Form PCT/IB/331 (July 1992) 



DE9903627 



vd|hAG UBER DIE INTERNATIONA 
AUF DEM GEBIET DES PAT 



# 

Pent 



USAMMEN ARBEIT 
TWESENS 



PCT 

INTERNATIONALER RECHERCHENBERICHT 

(Artikel 18 sowie Regeln 43 und 44 PCT) 



Aktenzeichen des Anmelders Oder Anwalts 

P111804/FTP/U 


WEITERES siehe Mitteilung uber die Ubermittlung des internationalen 

Recherche n be richts (Formblatt PCT/ISA/220) sowie, soweit 
VORGEHEN zutreffend, nachstehender Punkt 5 


Internationales Aktenzeichen 
PCT/DE 99/03627 


Internationales Anmeldedatum 
(T ag/Monat/Jahr) 

13/11/1999 


(Fruhestes) Prioritatsdatum (Tag/Monat/Jahr) 

14/11/1998 


Anmelder 

DAIMLERCHRYSLER AG et al . 



Dieser international Recherchenbericht wurde von der Internationalen Recherchenbehorde erstellt und wird dem Anmelder gemaB 
Artikel 18 iibermittelt. Eine Kopie wird dem Internationalen Buro ubermittelt. 

Dieser international Recherchenbericht umfaBt insgesamt _2 Blatter. 

[X] Daruber hinaus Hegt ihm jeweils eine Kopie der in diesem Bericht genannten Unterlagen zum Stand der Technik bei. 



Grundlage des Berichts 

a. Hinsichtlich der Sprache ist die Internationale Recherche auf der Grundlage der internationalen Anmeldung in der Sprache 
durchgefuhrt worden, in der sie eingereicht wurde, sofern unter diesem Punkt nichts anderes angegeben ist. 



□ 



b. 



Die international Recherche ist auf der Grundlage einer bei der Behdrde eingereichten Ubersetzung der internationalen 
Anmeldung (Regel 23.1 b)) durchgefuhrt worden. 

Hinsichtlich der in der internationalen Anmeldung often barten Nucleotide und/oder Aminosauresequenz ist die internationale 
Recherche auf der Grundlage des Sequenzprotokolls durchgefuhrt worden, das 
| | in der internationalen Anmeldung in Schriflicher Form enthatten ist. 

zusammen mit der internationalen Anmeldung in computerlesbarer Form eingereicht worden ist. 

bei der BehSrde nachtraglich in schrifUicher Form eingereicht worden ist. 

bei der Behorde nachtraglich in computerlesbarer Form eingereicht worden ist. 

Die ErklSrung, da3 das nachtraglich eingereichte schriftliche Sequenzprotokoll nicht fiber den Offenbarungsgehalt der 
internationalen Anmeldung im Anmeldezeitpunkt hinausgeht, wurde vorgelegt. 

Die Erklarung, daB die in computerlesbarer Form erfaBten Informationen dem schriftlichen Sequenzprotokoll entsprechen, 
wurde vorgelegt. 

Bestimmte Anspruche haben sich als nicht recherchierbar erwiesen (siehe Feld I). 
Mangel nde Einheitlichkeit der Erfindung (siehe Feld II). 



□ 
□ 
□ 
□ 

□ 

□ 
□ 



4. Hinsichtlich der Bezeichnung der Erfindung 

PC] wird der vom Anmelder eingereichte Wortlaut genehmigt. 
[ | wurde der Wortlaut von der Beh6rde wie folgt festgesetzt: 



5. Hinsichtlich der Zusammenfassung 

wird der vom Anmelder eingereichte Wortlaut genehmigt. 

wurde der Wortlaut nach Regel 38.2b) in der in Feld III angegebenen Fassung von der Behorde festgesetzt. Der 
| I Anmelder kann der Behorde innerhalb eines Monats nach dem Datum der Absendung dieses internationalen 
Recherchenberichts eine Stellungnahme vorlegen. 

6. Folgende Abbildung der Zeichnungen ist mit der Zusammenfassung zu verGffentlichen: Abb. Nr. — 



| | wie vom Anmelder vorgeschlagen [ X | keine der Abb. 

| | wetl der Anmelder selbst keine Abbildung vorgeschlagen hat. 
| | wetl diese Abbildung die Erfindung besser kennzeichnet. 



Formblatt PCT/ISA/210 (Blatt 1) (Juli 1998) 



INTERNATI 



LER RECHERCHENBERICHT 



Internationales Aktenzelchen 

PCT/DE 99/03627 



A. KLASSIFIZIERUNG DES ANMELDUNGSGEGENSTANDES 

IPK 7 G06K9/72 G08G1/0968 



Nach der Internatlonalen Patent Mass if ikation (IPK) Oder nach der nationalen Klasstfikation und der IPK 



B. RECHERCHIERTE GEBIETE 



Recherchierter Mindestprufstoff (Klassifikationssystem und Klassifikatlonssymbole ) 

IPK 7 G08G G06K 



Recherchierte aber nicht zum Mindestprufstoff gehdrende Veroffentlichungen, soweit diese unter die recherchierten Gebiete fallen 



W ah rend der internationaten Recherche konsuttierte elektronische Datenbank (Name der Datenbank und evtl. verwendete Suchbegriffe) 



C. ALS WESENTLICH ANGESEHENE UNTERLAGEN 



Kategorie 0 Bezeichnung der Veroffentlichung, soweit erforderlich unter Angabe der in Betracht kommenden Teile 



Betr. Anspruch Nr. 



A 
E 



PATENT ABSTRACTS OF JAPAN 

vol . 1995, no. 03, 

28. April 1995 (1995-04-28) 

& JP 06 348991 A (SUMITOMO ELECTRIC IND 

LTD), 22. Dezember 1994 (1994-12-22) 

Zusammenf assung 

DE 195 05 487 A (MANNESMANN AG) 
14. September 1995 (1995-09-14) 

DE 198 42 176 A (BOSCH GMBH ROBERT) 
16. Marz 2000 (2000-03-16) 
Spalte 1, Zeile 15 - Zeile 29 



1,13 



1,13 



1,2,13, 
14 



□ 



We iters Veroffentlichungen sind der Fortsetzung von Feld C zu 
entnehman 



Siehe An hang Pate ntfami lie 



° Be sonde re Katagorien von angegebenen Veroffentlichungen 

"A" Veroffentlichung, die den allgemeinen Stand der Technik definiert, 
aber nicht als besonders bedeutsam anzusehen ist 

"E° alteres Dokument, das jedoch erst am oder nach dem internatlonalen 
Anmeldedatum veroffentlicht worden ist 

Veroffentlichung, die geeignet ist, einen Prioritatsanspruch zweifelhaft er- 
scheinen zu lassen, oder durch die das Veroffentllchungsdatum einer 
anderen im Recherchenbericht genannten Veroffentlichung belegt warden 
soil oder die aus einem anderen besonderen Grund angegeben ist (wie 
ausgefuhrt) 

"O" Veroffentlichung, die sich auf eine mundliche Offenbarung, 

eine Benutzung, eine Ausstellung oderandere MaBnahmen bezieht 

"P" Veroffentlichung, die vor dem internatlonalen Anmeldedatum, aber nach 
dem beanspruchten Prioritatsdatum veroffentlicht worden ist 



T" Spate re Veroffentlichung, die nach dem international en Anmeldedatum 
oder dem Prioritatsdatum veroffentlicht worden ist und mtt der 
Anmeldung nicht koliidiert, sondern nur zum Verstandnis des der 
Erfindung zugrundeliegenden Prinzips Oder der ihr zugrundeliegenden 
Theorie angegeben ist 

"X" Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann allein auf grund diese r Veroffentlichung nicht als neu oder auf 
erfinderischer Tatigkeit beruhend betrachtet werden 

"Y" Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann nicht als auf erfinderischer Tatigkeit beruhend betrachtet 
werden, wenn die Veroffentlichung mit einer oder mehreren anderen 
Veroffentlichungen dieser Kategorie in Verbindung gebracht wird und 
diese Verbindung fur einen Fachmann naheliegend ist 

n &° Veroffentlichung, die Mitglied derselben Patentfamilie ist 



Datum des Abschlusses der internatlonalen Recherche 



12. April 2000 



Absendedatum des internatlonalen Recherche nberichts 



19/04/2000 



Name und Postanschrift der internatlonalen Recherchenbehdrde 
Europaisches Patentamt, P.B. 5818 Patentlaan 2 
NL - 2280 HV Rijswijk 
Tel. (+31-70) 340-2040, Tx. 31 651 epo nl, 
Fax: (+31-70) 340-3016 



Bevollmachtigter Bediensteter 



Sonius, M 



Formblatt PCT/ISA/21 0 (Blatt 2) (Juli 1 992) 



INTERNATIONAL SEARCH REPORT- 

Information on patent family members 



International Application No 

PCT/DE 99/03627 



Patent document 
cited in search report 



Publication 
date 



Patent family 
member(s) 



Publication 
date 



JP 06348991 



22-12-1994 



NONE 



DE 


19505487 


A 


14-09-1995 


NONE 




DE 


19842176 


A 


16-03-2000 


W0 0016214 A 


23-03-2000 



Foim PCT/ISA/210 (patent family annex) (July 1992) 



INTERNATIONAL SEARCH REPOR 



International Application No 

PCT/DE 99/03627 



A. CLASSIFICATION OF SUBJECT MATTER , 

IPC 7 G06K9/72 G08G1/0968 



According to International Patent Classification (IPC) or to both national classification and IPC 



B. FIELDS SEARCHED 



Minimum documentation searched (classification system followed by classification symbols) 

IPC 7 G08G G06K 



Documentation searched other than minimum documentation to the extent that such documents are included in the fields searched 



Electronic data base consulted during the international search (name of data base and, where practical, search terms used) 



C. DOCUMENTS CONSIDERED TO BE RELEVANT 



Category * Citation of document, with indication, where appropriate, of the relevant passages 



Relevant to claim No. 



PATENT ABSTRACTS OF JAPAN 

vol. 1995, no. 03, 

28 April 1995 (1995-04-28) 

& JP 06 348991 A (SUMITOMO ELECTRIC IND 

LTD), 22 December 1994 (1994-12-22) 

abstract 

DE 195 05 487 A (MANNESMANN AG) 
14 September 1995 (1995-09-14) 

DE 198 42 176 A (BOSCH GMBH ROBERT) 
16 March 2000 (2000-03-16) 
column 1, line 15 - line 29 



1,13 



1,13 



1,2,13, 
14 



□ 



Further documents are listed in the continuation of box C. 



ID 



Patent family members are listed in annex. 



° Special categories of cited documents : 

"A" document defining the general state of the art which is not 

considered to be of particular relevance 
'E* earlier document but published on or after the international 

filing date 

"L* document which may throw doubts on priority ciatm(s) or 
which is cited to establish the publication date of another 
citation or other special reason (as specified) 

*0* document referring to an oral disclosure, use, exhibition or 
other means 

"P" document published prior to the international filing date but 
later than the priority date claimed 



T" later document published after the international filing date 
or priority date and not in conflict with the application but 
cited to understand the principle or theory underlying the 
invention 

"X - document of particular relevance; the claimed Invention 
cannot be considered novel or cannot be considered to 
involve an inventive step when the document Is taken alone 

"Y" document of particular relevance; the claimed invention 

cannot be considered to involve an inventive step when the 
document is combined with one or more other such docu- 
ments, such combination being obvious to a person skilled 
in the art. 

"&* document member of the same patent family 



Date of the actual completion of the International search 



12 April 2000 



Date of mailing of the International search report 



19/04/2000 



Name and mailing address of the ISA 

European Patent Office, P.B. 5818 Patenttaan 2 
NL-2280HVRijswiIk 
Tel. (+31-70) 34O-2040. Tx. 31 651 epo nl, 
Fax: (+31-70) 340-3016 



Authorized officer 



Sonius, M 



Form PCT/ISA/210 (second eheet) (July 1982) 



s 


^INTERNATIONAL SEARCH REPORT^ 

Information on patent family members 


International Application No 

PCT/DE 99/03627 




Patent document 
cited in search report 


Publication 
date 


Patent family 
members) 


Publication 
date 



JP 06348991 A 22-12-1994 NONE 



DE 


19505487 


A 


14-09-1995 


NONE 




DE 


19842176 


A 


16-03-2000 


W0 0016214 A 


23-03-2000 



Form PCTASA/210 (patent family annex) (Jury 1892) 




(12) NACH DEM VERT RAG UBER DIE INTERNATIONALE ZUSAMMENARBEIT AUF DEM CEBIET DES 
PATENTWESENS (PCT) VEROFFENTLICHTE INTERNATIONALE ANMELDUNG 



(19) Weltorganisation fur geistiges Eigentum 
Internationales Biiro 

(43) Internationales Verdffentlichungsdatum 
25. Mai 2000 (25.05.2000) 




PCT 



(10) Internationale Veroffentlichungsnummer 

WO 00/30024 A3 



(51) Internationale Patentklassifikation 7 : G06K 9/72. 

C08C 1/0968 



(DE). ULMER, Berthold [DE/DE1: Seheiztorstrasse 24. 
D-73728 Esslingen (DE). 



(21) Internationales Aktenzeichen: PCT/DE99/03627 

(22) Internationales Anmeldedatum: 

13. November 1999(13.1 LI 999) 



(25) Einreichungssprache: 

(26) Veroffentlichungssprache: 



Deutsch 
Deutsch 



(30) Angaben zur Prioritat: 

198 52 631.8 14. November 1998(14.11.1998) DE 

(71 ) A nm elder (fitr a He Bestimmungsstaaten mit Aitsnahme von 
US): DA I MLERCH R YSLER AG [DE/DE]: Epplestrasse 
225, D-70567 Stuttean (DE). 



(74) Gemeinsamer Vertreter: DA I M LERCH RYSLER AG: 

Intellectual Properly Management. Sedanstrasse 1()/Geb. 
17, D-89077 Ulm (DE). 

(81) Bestimmungsstaaten (national): J P. US. 

(84) Bestimmungsstaaten (regional): europaisches Patent (AT, 
BE. CH. CY, DE. DK. Esl Fl. FR. GB. GR. IE, IT, LU. MC. 
NL. PT. S£). 

Veroffentlicht: 

— mit internationalem Recherchenbericht 

(88) Verdffentlichungsdatum des internationalen 

Recherchenberichts: 29. November 2001 



(72) Erfinder; und 

(75) Erfinder/Anmelder (nur fur US): JANSSEN, Reinhard 
[DE/DE]; Sudetenweg 104. D-89075 Ulm (DE). LIND- 
NER, Frank [DE/DE]; Silvanerweg 104, D-89075 Ulm 



Zur Er kid rung der Zweibuchstaben-Codes und der anderen 
Abkiirzungen wind auf die Erldiirungen ("Guidance Notes on 
Codes and Abbreviations") am Anfangjeder reguldren Ausgabe 
der PCT-Gazette venviesen. 



(54) Title: METHOD FOR INCREASING THE POWER OF A TRAFFIC SIGN RECOGNITION SYSTEM 

(54) Bezeichnung: VERFAHREN ZUR LEISTUNGSSTE1GERUNG EINES VERKEHRSZEICHENERKENNUNGSSYSTEMS 



< 



(57) Abstract: The invention relates to a method and device that increase the power of previously known systems that recognize 
and display the contents of traffic signs. The invention reduces the amount of computer capacity required for real time operation 
and improves the display quality of the contents of known traffic signs. The system for recognizing and/or displaying traffic signs 
comprises a camera and an evaluation unit connected thereto for image recognition and/or display. Said system uses information 
stemming from at least one map-based navigation system and/or one travel information system in order to recognize and/or display 
the contents of traffic signs. 



(57) Zusammenfassung: Die Erfindung beschreibt ein Verfahren und eine Vorrichtung. welche die Leistungsfahigkeit von vorbe- 

kannten Systemen zur Erkennung und Anzeige von Inhalten von Verkehrszeichen erhoht. Dadurch wird zum einen die fur einen 

echtzeitfahigen Betrieb notwendige Rechnerkapazitat reduziert und zum anderen Qualitat der Anzeige der Inhalte der erkannten 
Verkehrszeichen verbessen werden. Das System zur Erkennung und/oder Anzeige von Verkehrszeichen, welches eine Kamera und 
eine damit verbundene Auswerteeinheit zur Bilderkennung und/oder zur Bildanzeige aufweist, nutzt hierbei die von mindestens ei- 
nem kartenbasierten Navigationssystem und/oder einem Verkehrsinformationssystem stammende Informationen bei der Erkennung 
^* und/oder der Anzeige von Inhalten von Verkehrszeichen aus. 



v 



INTERNATIONAL SEARCH REPORT 



International application No. 
PCT/DE 99/03627 



A. CLASSIFICATION OF SUBJECT MATTER 
IPK 7 G06K9/72 608G1/0968 

According to International Patent Classification (IPC) or to both national classification and IPC 



B FIELDS SEARCHED 



Minimum documentation searched (classification system followed by classification symbols) 

IPK 7 G08G G06K 



Documentation searched other than minimum documentation to the extent that such documents are included in the fields searched 



Electronic data base consulted during the international search (name of data base and, where practicable, search terms used) 



C DOCUMENTS CONSIDERED TO BE RELEVANT 



Category* 



Citation of document, with indication, where appropriate, of the relevant passages 



Relevant to claim No. 



A 

E 



PATENT ABSTRACTS OF JAPAN 

vol. 1995, no. 03, 

28. April 1995 (1995-04-28) 

& JP 06 348991 A (SUMITOMO ELECTRIC IND 

LTD), 22 December 1994 (1994-12-22) 

Abstract 

DE 195 05 487 A (MANNESMANN AG) 
14. September 1995 (1995-09-14) 

DE 198 42 176 A (BOSCH GMBH ROBERT) 
16 March 2000 (2000-03-16) 
column 1, line 15, line 29 



1,13 



1,13 



1,2,13, 
14 



| | Further documents are listed in the continuation of Box C. [>£] See patent family annex 



* Special categories of cited documents: 

"A" ^««p^"t defining the general state of the art which is not considered 

to be of particular relevance 
**E" earlier document but published on or after the international filing date 
«L" document which may throw doubts on priority claim(s) or which is 

r^t^A to establish the publication date of another citation or other 

special reason (as specified) 
"O" document referring to an oral disclosure, use, exhibition or other 



"P" f hrrr mm* published prior to the international filing date but later than 
the priority date claimed 



"T* later document published after the international filing date or priority 
Hato and not in conflict with the application but cited to understand 
the principle or theory underlying the invention 

**X" document of particular relevance; the claimed invention cannot be 
considered novel or cannot be considered to involve an inventive 
step when the document is taken alone 

**Y"" document of particular relevance; the claimed invention cannot be 
considered to involve an inventive step when the document is 
combined with one or more other such documents, such combination 
being obvious to a person skilled in the art 

document member of the same patent family 



Date of the actual completion of the international search 
12. April 2000 



Date of mailing of the international search report 
19/04/2000 



Name and r"*^ in g address, of. the ISA/ 

Eurooaiscnes Patentarm, P.B. 5818 Patenitaan 2 

NL - 2280 MV Rijswii* 

Tel. (+31-70) 340-2040, Tx. 31 651 epo nf, 

Facsimile No. <*3i-70) 340-301 6 



Authorized officer 



Telephone No. 



Sonius, M 



Form PCT/ISA/210 (second sheet) (July 1992) 



INTERNATIONAL SEARCH REPORT 

information on patent family members 



Patent document 
cited in search report 



International Application No 

PCT/DE 99/03627 



Patent familiy 
member(s) 



JP 06348991 
DE 19505487 



22-12-1994 
14-09-1995 



DE 19842176 



16-03-2000 



23-03-2000 



Form PCT/lSAfllO (patent family annex) (iuly 1992) 



INTERNATIONALER RECHERCHENBERICHT 



Internationa tea Aktenzeichen 

PCT/DE 99/03627 



A. KLASSIFIZIERUNG DES ANMELDUNGSGEGENSTANDES 

IPK 7 G06K9/72 G08G1/0968 



Nach der Internationalen Patent kiassifikation (IPK) Oder nach der nationalen Kiassifikation und der IPK 



B. RECHERCHIERTE GEBIETE 



Recherchierter Mindestprufstoff (Klassiftkationssystem una K lass ifi kali on ssymboie ) 

IPK 7 G08G G06K 



Recherchierte aber nicht zum Mindestprufstoff gehorende Veroffentlichungen, soweit diese unter die recherchierten Gebiete fallen 



Wahrend der internationalen Recherche konsutlierte elektronische Oatenbank (Name der Datenbank und evtl. verwendete Suchbegritfe) 



C. ALS WESENTUCH ANGESEHENE UNTER LAG EN 



Kategorie 0 Bezeichnung der Veroffentlichung, soweit erforderiich unter Angabe der in Betracht kommenden Teile 



Betr. Anspruch Nr. 



PATENT ABSTRACTS OF JAPAN 

vol. 1995, no. 03, 

28. April 1995 (1995-04-28) 

& JP 06 348991 A (SUMITOMO ELECTRIC IND 

LTD), 22. Dezember 1994 (1994-12-22) 

Zusammenf assung 

DE 195 05 487 A (MANNESMANN AG) 
14. September 1995 (1995-09-14) 

DE 198 42 176 A (BOSCH GMBH ROBERT) 
16. Marz 2000 (2000-03-16) 
Spalte 1, Zeile 15 - Zeile 29 



1,13 



1,13 



1,2,13, 
14 



□ 



Weitere Veroffentlichungen sind der Fortsetzung von Feld C zu 
entnehmen 



Siehe Anhang Pate ntfami lie 



° Besondere Kategorien von angegebenen Veroffentlichungen 

"A" Veroffentlichung, die den allgemeinen Stand der Technik definiert, 
aber nicht als besonders bedeutsam anzusehen ist 

"E" alteres Dokument, das jedoch erst am oder nach dem internationalen 
Anmeldedatum vera ffent lien t worden ist 

"L" Veroffentlichung, die geeignet ist, einen Prioritatsanspruch zweifelhaft er- 
scheinen zu lassen. oder durch aie das Veroffentlichungsdatum einer 
anderen im Recherchenbericht genannten Veroffentlichung belegt werden 
soil oder die aus einem anderen besonderen Grund angegeben ist (wie 
ausgefuhrt) 

"O" Veroffentlichung. die sich auf eine mundltche Offenbarung, 

eine Benutzung, eine Ausstellung oder andere MaGnahmen bezieht 

•P" Veroffentlichung, die vor dem internationalen Anmeldedatum, aber nach 
dem beanspruchten Prioritatsdatum veroffentlicht worden ist 



T" Spatere Veroffentlichung, die nach dem internationalen Anmeldedatum 
oder dem Priori tatsdatum veroffentlicht worden ist und mit der 
Anmeldung nicht koliidiert, sondern nur zum Verstandnis des der 
Erfindung zugrundeliegenden Prinzips oder der ihr zugrundeiiegenden 
Theorie angegeben ist 

"X" Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann allein aufgrund dieser Veroffentlichung nicht als neu oder auf 
erfinderischer Tatigkeit beruhend betrachtet werden 

"Y* Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann nicht aJs auf erfinderischer Tatigkeit beruhend betrachtet 
werden, wenn die Veroffentlichung mit einer oder mehreren anderen 
Veroffentlichungen dieser Kategorie in Verbindung gebracht wird und 
diese Verbindung fur einen Fachmann nahefiegend ist 
Veroffentlichung. die Mitglied derselben Patentfamilie ist 



Datum des Abschlusses der internationalen Recherche 



12. April 2000 



Absenaedatum des internationalen Recherche n bench ts 



19/04/2000 



Name und Postanschrift der Internationalen Recherchenoehorde 
Europaisches Patemamt. P.B. 5818 Patentiaan 2 
NL - 2280 HV Rijswijk 

Tel. (+31-70) 340-2040. Tx. 31 651 epo nl. 
Fax: (+31-70) 340-3016 



Bevollmachtigter Bediensteter 



Sonius, M 



Formbtan PCT/1SA^10 (Blatl 2) (Juli 1992) 



INTERNATIONALER RECHERCHENBERICHT 

Angaben zu Veroffenttichungen. die zur selben Patentfarrniie genoren 



Internationales Aktenzeicnen 

PCT/DE 99/03627 



lm Recherchenbericht 
angefuhrtes Patentdokument 



Datum der 
Veroffentlichung 



Mitglied(er) der 
Patentfamili© 



Datum der 
Veroffentlichung 



JP 06348991 



22-12-1994 



KEINE 



DE 19505487 A 14-09-1995 KEINE 

DE~9842176 A 16-03-2000 WO 0016214 A 23-03-2000 



Formbiatt PCT/ISA/210 (Anhang Patenttamilie)(JiJli 1992) 




pprp WELTORGANISATION FCfll GEISTIGES EIGENTUM 



(51) Internationale Patentklassifikation 7 : 
G06K 9/72 



A2 



(11) Internationale VeroffentUchungsnuramer: WO 00/30024 



(43) Internationales 

Veroffentlichnngsdatum; 



25. Mai 2000 (25.05.00) 



(21) Internationales Aktenzeichen: 

(22) Internationales Anmeldedatum: 



PCT/DE99/03627 

13. November 1999 
(13.11.99) 



(30) Prioritatsdaten: 

198 52 631.8 



14. November 1998 (14.1 1.98) DE 
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Verfahren zur Leistungssteigerung eines Verkehrszeichenerkennungssvstems 

Die Erfindung betrifft ein Verfahren zur Leistungssteigerung eines Systems zur 
Erkennung uncl/oder Anzeige von Verkehrszeichen gemaB der Oberbegriffe der 
Patentanspruche 1 und 10. 

5 Aus den Schriften DE 3619824 C2 und DE 198 52 631 A1 sind Verfahren und 
Vorrichtungen bekannt, welche innerhalb von Bildern von Verkehrsszenen 
Verkehrszeichen erkennen, klassifizieren und zur Anzeige bringen. Hierbei analysieren 
die Verfahren von Bildsensoren zur Verfugung gestellte Bilddaten ohne jegliches 
Vorwissen uber das aktuelle Szenario. Aus diesem Grunde sind diese vorbekannten 
10 Verfahren zeitaufwendig und bedurfen um echtzeitfahig arbeiten zu konnen einer hohen 
Rechenkapazitat und -leistung. 

Aufgabe der Erfindung ist es daher eine Verfahren und eine Vorrichtung zu finden, 
welche die Leistungsfahigkeit von vorbekannten Systemen zur Erkennung und Anzeige 
von Inhalten von Verkehrszeichen erhoht. Hierzu soli zum einen die fur einen 
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echtzeitfahigen Betrieb notwenclige Rechnerkapazitat reduziert und zum anderen 
Qualitat der Anzeige der Inhalte der erkannten Verkehrszeichen verbessert werden. 

Die Aufgabe wird durch ein Verfahren und eine Vorrichtung gelost, bei welcher ein 
System zur Erkennung und/oder Anzeige von Verkehrszeichen, welches eine Kamera 
5 und eine damit verbundene Auswerteeinheit zur Bilderkennung und/oder zur 
Bildanzeige aufweist, die von mindestens einem kartenbasierten Navigationssystem 
und/oder einem Verkehrsinformationssystemen stammende Informationen bei der 
Erkennung und/oder der Anzeige von Inhalten von Verkehrszeichen ausnutzt. 

In einer denkbaren Ausfuhrungsform der Erfindung, wird die Kommunikation zwischen 
10 dem System zur Erkennung und/oder Anzeige von Verkehrszeichen und den 
kartenbasierten Navigationssystemen bzw. den Verkehrsinformationssystemen uber 
einen Fahrzeugdatenbus. 

In vorteilhafter Weise kann das System zur Erkennung von Verkehrszeichen auf erhohte 
Leistung geschaltet werden, wenn auf Grundlage von Informationen wie sie von 

15 kartenbasierten Navigationssystem und/oder einem Verkehrsinformationssystemen 
bekannt werden, daB das Fahrzeug einen Bereich passiert, der bezuglich einer 
zuverlassigen Erkennung von Verkehrszeichen problematisch ist. Beispiele solcher 
besonders zu berucksichtigender Bereiches sind unter anderem Ortseingange und 
Ortsausgange. Dort befinden sich Ortseingangs- und Ortsausgangstafeln, welche 

20 Geschwindigkeitsbeschrankungen, bzw. Aufhebungen dieser Beschrankungen 
implizieren. Die Tafeln sind jedoch nicht wie ublich kreisrund, sondern rechteckig. Die 
Tafeln enthalten sind leicht mit Werbetafeln zu verwechseln, insbesondere dann, wenn 
die Verkehrszeichenerkennung mittels monochromer Kameras durchgefuhrt wird, da 
hier die relativ signifikante gelbe Farbung der Tafeln nicht zur notwendigen Geltung 

25 kommt. Ein weiterer besonders zu berucksichtigender Bereich ist im Umfeld von 
Verkehrsbeeinflussungsanlagen und Wechselschildern gegeben. Hier muB mit 
gesonderten Darstellung und Auspragung der Verkehrszeichen gerechnet werden, so 
z.B. mit einer inversen Darstellung der Schwarz- und WeiBanteile der Verkehrszeichen 
aus Grunden besserer Nachtsichtbarkeit. Auch ist mit einem plotzlich auftretenden 

30 Wechsel oder Einschalten des Verkehrszeichensymbols zu rechnen, z.B, plotzliche 
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Beschrankung auf Tempo 120km/h auf Autobahnen. Eine besondere Art von 
Verkehrszeichen stellen Ampeln dar. Prinzipiell sind sle mit einem Wechselschild 
vergleichbar, da sich auch der Zustand ihrer Anzeige andern kann und somit einer 
erhohten Aufmerksamkeit bedarf. Durch kartenbasierte Information ist es jedoch 
5 moglich das System zur Verkehrszeichenerkennung in Bereichen von Ampelanlagen 
(z.B.: Kreuzungen, Bahnubergange) mit erhohter Erkennungsleistung zu betreiben. 
Wahrend die vorangegangen Beispiele hauptsachlich in alleinigem Zusammenspiel mit 
Informationen von kartenbasierten Navigationssystemen zu sehen sind, werden 
nachfolgen beispielhaft Situationen dargestellt, bei denen erhohte Erkennungsleistung 
10 gefordert wird und welche gewinnbringend mit Informationen die von 
Verkehrsinformationssystem stammen verknupft werden. Dies ist im wesentlichen die 
Information, daB in einem bestimmten vom Fahrzeug befahrenen Bereich schlechte 
Sicht durch Nebel Oder Regen vorherrscht. In einer solchen Situation ist verstarkt mit 
kontrastarmen Bilddaten zu rechnen, so daB das System zur Verkehrszeichenerkennung 
15 vorzugsweise verstarkt auf eine Kontrastverbesserung der Bilddaten hinwirken sollte. 
Vorteilhaft wirkt sich auch die Einbeziehung von Stauwarnungen aus, da hier dem 
Beobachter friihzeitig, in sinnvollem Abstand zur vorhanden Verkehrsstorung im 
Rahmen der Anzeige von Verzeichen ein Stausymbol dargeboten werden kann, ohne 
daB erste ein solches Verkehrszeichen passiert werden muB. 
20 Durch diese erfindungsgemaBe Moglichkeit die Verkehrszeichenerkennung temporar in 
ihrer Leistung zu variieren eroffnet die Moglichkeit eine Erkennung von Verkehrszeichen 
okonomisch zu realisieren. Es ist auch in vorteilhafter Weise nicht notwendig ein 
System zur bereit zustellen, welches im normalen Betrieb mangelhaft ausgelastet ist 
und nur in kritischen Situationen voll ausgelastet wird. Sondern es wird die Moglichkeit 
25 eroffnet, mittels moderner Mulitprozessor-Datenverarbeitung im Ruckgriff auf die 
interne Fahrzeugdatenkommunikation und die in modernen Fahrzeugen in einer Vielzahl 
vorhandene Datenprozessoren, die momentan freie, nicht ausgenutzte Rechnerleistung 
fur einen sinnvollen, okonomischen Einsatz zu nutzen. 

Ein weiteres vorteilhaftes Ausgestaltungsmerkmal der Erfindung besteht darin, daB in 
30 einem bereitgestellten Datenspeicher Informationen uber die Art und/oder die Position 
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und/oder den Zustand und/oder die Sichtbarkeit und/oder die GroBe des erkannten 
Verkehrszeichens gespeichert wird. Dabei kann dieser Datenspeicher entweder dem 
kartenbasierten Navigationssystem bzw. dem Verkehrsinformationssystem zugeordnet 
sein, oder aber auch Bestandteil des Systems zur Verkehrszeichen Erkennung und/oder 
5 Anzeige sein. Durch die Kombination mit dieser Datenspeicherung kann der Beobachter 
durch ein akustisches oder optisches Signal darauf aufmerksam gemacht werden, dass 
sich entlang einer bereits einmal befahrenen Wegstrecke eine Anderung in Bezug auf 
die Position beziehungsweise des Vorhandenseins eines Verkehrszeichens ergeben hat. 
Dadurch ist es moglich einen Beobachter zum Beispiel auf baustellen-bedingte 
10 Verkehrsregelungen oder bei geanderter Vorfahrtsregelung im Kreuzungsbereich. In 
vorteilhafterweise wird gleichermaBen der Beobachter auch dann einen Warnhinweis 
erhalten, wenn das System zur Verkehrszeichenerkennung ein tatsachlich vorhandenes 
Verkehrszeichen nicht erkennen oder nur ungenugend klassifizieren konnte. 

Weiterhin wirkt sich bei der Erfindung positiv aus, daB auf Grundlage der 
15 kartenbasierten Positionsbestimmung die Moglichkeit eroffnet wird, ein Programm zur 
Anwendung einer Entscheidungslogik zu veranlassen, ein Verkehrszeichen so lange 
anzuzeigen, bis eine vorgegebene Wegstrecke zuruckgelegt ist. Diese vorgegebene 
Wegstrecke ist vorzugsweise klassenspezifisch und kann durch eine Speichereinheit zur 
Verfugung gestellt werden. Es ist beispielsweise in der Bundesrepublik Deutschland 
20 eine StraBenauffahrt gleichbedeutend mit einer impliziten Aufhebung von Ge- und 
Verboten, wie Geschwindigkeitsbegrenzungen. Zudem mussen 
Geschwindigkeitsbegrenzungen nach spatestens 3 km erneuert werden, ansonsten 
gelten sie als aufgehoben. Durch dieses erfindungsgemaBe Merkmal wird also erreicht, 
daB ein Verkehrszeichen, auch ohne explizite Aufhebung, nur so lange wie unbedingt 
25 notwendig angezeigt wird. 

Besonders vorteilhaft wirkt sich die Erfindung in der Kombination mit einem System zur 
Verkehrszeichenerkennung aus, bei welchem die Bilddaten des Bildsensors in einer 
Informationsverarbeitungseinheit analysiert und klassifiziert und auf Grundlage des 
30 Ergebnisses einer Klassifikation Bildausschnitte und/oder in einer Speichereinheit 
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gespeicherte, eine symbolische Darstellung reprasentierende Bilddaten in einer 
Speichereinheit ablegt und mittels einer Anzeigeeinheit darstellt. Hierbei wird im 
Rahmen der Analyse in der Informationsverarbeitungseinheit ermittelt, ob die Bilddaten 
des Bildsensors ein Oder mehrere Objekte enthalten, welche mit hinreichender 
5 Wahrscheinlichkeit Verkehrszeichen sind. In Folge werden die so ermittelten Objekte 
einer Weiterverarbeitung und Klassifikation zugefuhrt. In besonders vorteilhafter Weise, 
wird im Rahmen der Erfindung bei der Weiterverarbeitung der Bilddaten der Objekte 
eine Separierung in verkehrszeichenspezifische Oberklassen und Unterklassen 
vorgenommen. Dabei werden entsprechende klassenspezifische Merkmalsdaten 

10 extrahiert und einer getrennten Klassifikation zugefuhrt. Abhangig davon ob die 
klassenspezifischen Merkmalsdaten bei der Klassifikation mit hoher Wahrscheinlichkeit 
korrekt erkannt wurden, werden sie durch entsprechende in einer Speichereinheit 
gespeicherte, die symbolische Darstellung reprasentierende Bilddaten Oder durch die 
entsprechenden ursprungliche vom Bildsensor stammenden Bilddaten ersetzt. Die aus 

15 dieser Ersetzung resultierenden Bilddaten werden zu einem synthetischen Bild eines 
Verkehrszeichens kombiniert und dieses Bild dann in der Speichereinheit gespeichert 
und mittels der Anzeigeeinheit zur Anzeige gebracht. 

Ein wesentlicher Vorteil bei einem solchen System zur Verkehrszeichenerkennung 
besteht darin, daB mit ihr nicht mehr das rechenaufwendige und mit hohen 

20 Ruckweisungsquoten behaftete Problem der Klassifikation eines in seiner Gesamtheit 
recht komplexen Verkehrszeichen gelost werden mu(3, sondern das Problem wird durch 
die der Klassifikation vorangegangene Separierung der detektierten Objekte in 
verkehrszeichenspezifische Oberklassen und Unterklassen auf eindeutigere und somit 
einfachere Klassifikationsprobleme zuruckgefuhrt. Hierbei werden gleichermaBen die 

25 Anforderungen an die notwendige Rechenleistung und Bildqualitat reduziert. 

Beispielhaft soil kurz anhand eines hier anhand eines 
Geschwindigkeitsbegrenzungszeichens die Aufteilung eines Verkehrszeichens in 
verkehrszeichenspezifische Oberklassen und Unterklassen erlautert werden. Die 
verkehrszeichenspezifische Oberklasse dieses Verkehrszeichen ist die Klasse der 
30 Verbotszeichen, welche als Merkmalsdaten eine Runde Form mit einem innenliegenden 
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Symbol aufweisen. Im speziellen Fall eines Geschwindigkeitsbegrenzungszeichens ist 
das innenliegende Symbol eine Zahl welche von einem breiten, roten Ring umschlossen 
ist. Im Fall des Geschwindigkeitsbegrenzungszeichens ist das innenliegende Symbol, 
d.h. die Angabe auf welche Geschwindigkeit eine Fahrgeschwindigkeit zu begrenzen ist, 
5 ein Element der verkehrszeichenspezifischen Unterklasse. 

Bei der System zur Verkehrszeichenerkennung, mit weichem vorteilhaft die Erfindung 
zur Leistungssteigerung eines Systems zur Erkennung und/oder Anzeige von 
Verkehrszeichen kombiniert werden kann, pruft mit vergleichsweise geringer 
Rechenleistung und geringem apparativen Aufwand (beispielsweise einer Monochrom- 

10 kamera anstatt einer hochauflosenden Farbkamera) in Echtzeit nach, ob es sich bei 
einem Objekt bestimmter Form innerhalb des aufgenommenen Bildes urn ein Verkehrs- 
zeichen handelt. Ist dies der Fall, so werden die klassenspezifischen Merkmalsdaten des 
Objekts einer getrennten Klassifikation zur Identifikation des Verkehrszeichens 
zugefuhrt. In der Regel kommt hierbei ein hierarchisch organisierter Klassifikator zum 

15 Einsatz. Die Klassifikation erfolgt dabei in mehreren Stufen. Hierzu werden zuerst nur 
die der Oberklasse des Objektes zugehorigen Merkmalsdaten einer Klassifikation 
zugefuhrt. Bei erfolgreicher Klassifikation (d.h. die Klasse konnte mit hoher 
Wahrscheinlichkeit korrekt erkannt werden) werden die Merkmalsdaten durch die 
entsprechende in der Speichereinheit gespeicherte symbolische Darstellung der 

2 0 Oberklasse ersetzt. Blieb die Klassifikation erfolglos (d.h. die Klasse konnte nicht mit 
hoher Wahrscheinlichkeit korrekt erkannt werden) werden die Merkmalsdaten der 
^ Oberklasse und die Merkmalsdaten der Unterklasse durch die entsprechenden 
ursprunglichen vom Bildsensor stammenden Bilddaten ersetzt und die 
Klassifikationprozedur wird beendet. Ein weiterer Schritt innerhalb der 

25 Klassifikationsprozedur wird dann eingeleitet, wenn die Klassifikation der Oberklasse 
erfolgreich war. In diesem Fall werden nachfolgend die der Unterklasse des Objektes 
zugehorigen Merkmalsdaten einem Klassifikator zugefuhrt. Bei erfolgreicher 
Klassifikation dieser Unterklasse (d.h. die Klasse konnte mit hoher Wahrscheinlichkeit 
korrekt erkannt werden) werden die Merkmalsdaten durch die entsprechende in der 

30 Speichereinheit gespeicherte symbolische Darstellung der Unterklasse ersetzt. 
Andererseits werden bei erfolgloser Klassifikation (d.h. die Klasse konnte nicht mit 
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hoher wahrscheinlichkeit korrekt erkannt werden) die Merkmalsdaten der Unterklasse 
durch die entsprechenden ursprunglichen vom Bildsensor stammenden Bilddaten 
ersetzt. 



Mit diesem hierarchischen Vorgehen wird eine Verkehrszeichenerkennung mit geringer 
5 Ruckweisungsquote zur Verfugung gestellt. Dabei konnen die beiden hierarchischen 
Stufen zur Identifikation der Oberklasse beziehungsweise zur Identifikation der 
Unterklasse selbst wieder hierarchisch organisiert sein. Bezuglich der Gestaltung der 
innerhalb der hierarchischen Klassifikation eingesetzten Klassifikatoren ist es denkbar, 
diese so zu gestalten, daB sie auf Grundlage eines Vergleichs von DistanzmaBen der 

10 ihnen gelieferten Merkmalsdaten von in der Speichereinheit gespeicherten 
klassentypischen Merkmalsdatensatzen entscheiden. Hierbei wird das als 
Verkehrszeichen identifizierte Objekt jener Oberklasse zugeordnet, zu welcher die 
Distanz im Merkmalsraum am geringsten ist. Es ist dabei moglich eine Toleranzschwelle 
zu definieren der mit dem minimalen Distanzwert verglichen wird, wobei das 

15 Unterschreiten des Toleranzwertes durch den Distanzwert als Hinweis auf eine mit 
hoher Wahrscheinlichkeit korrekt erfolgte Erkennung dient. In einer anderen 
vorteilhaften Ausgestaltung ist es auch moglich die Klassifikatoren so zu gestalten, daf3 
sie mit Hilfe von verkehrszeichenspezifischen Lernstichproben trainiert werden konnen. 
Dieses Vorgehen ist besonders vorteilhaft, da die Qualitat der von dem Bildsensor 

20 gelieferten Bilddaten stark von Umweltfaktoren wie Wetter und Lichtverhaltnissen 
abhangig sind. 
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Patentanspruche 

1- Verfahren zur Leistungssteigerung eines Systems zur Erkennung und/oder Anzeige 
von Verkehrszeichen, 

welches eine Kamera und eine damit verbundene Auswerteeinheit zur Bilderkennung 
und/oder zur Bildanzeige aufweist, 

5 dadurch gekennzeichnet, 

das System die von mindestens einem kartenbasierten Navigationssystem und/oder 
einem Verkehrsinformationssystem stammende Informationen bei der Erkennung 
und/oder der Anzeige von Inhalten von Verkehrszeichen ausnutzt. 

10 2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB das Systems zur 
Erkennung und/oder Anzeige von Verkehrszeichen uber einen Fahrzeugdatenbus mit 
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den kartenbasierten Navigationssystemen und/oder Verkehrsinformationssystemen 
kommuniziert. 

3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, daB das System zur 
5 Verkehrszeichenerkennung mit erhohter Leistung zu arbeiten beginnt, wenn auf 

Grundlage von kartenbasierten Informationen bekannt wird, daB das Fahrzeug einen 
Bereich passiert, der bezuglich der Erkennung von Verkehrszeichen problematisch ist. 

4. Verfahren nach einem der Anspruche 1 bis 3, dadurch gekennzeichnet, daB innerhalb 
problematischer Bereiche zusatzlich gesonderter Erkennungsaufwand betrieben wird, 

10 derart daB 

a) im Bereich von Ortseingangen und Ortsausgangen, gesondert nach 
Ortseingangs- und Ortsausgangstafeln gesucht wird, 

b) im Bereich von Verkehrsbeeinflussungsanlagen, Wechselschildern oder 
Ampetn, gesondert auf einen Wechsel der Art und Weise der Auspragung des 

15 Verkehrszeichen geachtet wird, 

c) in einem Bereich, in welchem schlechte Sicht durch Nebel oder Regen 
vorherrscht verstarkt mit kontrastarmen Biiddaten gerechnet wird und dadurch 
vorzugsweise verstarkt auf eine Kontrastverbesserung der Biiddaten hingewirkt 
wird, 

20 

5. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, daB 
in einem dem kartenbasierten Navigationssystem beziehungsweise dem 
Verkehrsinformationssystem beigestellten Datenspeicher die Art und/oder die Position 
und/oder der Zustand und/oder die Sichtbarkeit und/oder die GroBe des erkannten 

2 5 Verkehrszeichens gespeichert wird. 

6. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, daB 
in einem dem System zur Erkennung von Verkehrszeichen beigestellten Datenspeicher 
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die Art und/oder die Position und/oder der Zustand und/oder die Sichtbarkeit 
und/oder die GroBe des erkannten Verkehrszeichens gespeichert wird. 

7. Verfahren nach einem der Anspruche 5 Oder 6, dadurch gekennzeichnet, daB mittels 
eines in der Anzeigeeinheit enthaltenen Signalgebers ein akustisches oder optisches 

5 Signal ausgegeben wird, wenn sich entlang einer bereits einmal befahrenen Wegstecke 
eine Anderung bzgl. der Position beziehungsweise des Vorhandenseins eines 
Verkehrszeichens ergibt. 

8. Verfahren nach einem der vorhergehend Anspruche, dadurch gekennzeichnet, daB 
10 ausgehend von den kartenbasierten Navigationssystemen und/oder den 

Verkehrsinformationssystemen ein Programm zur Anwendung einer Entscheidungslogik 
derart gesteuert wird, daB das Bild eines Verkehrszeichens solange angezeigt wird, bis 
eine vorgegebene Wegstrecke zuruckgelegt 1st, welche vorzugsweise klassenspezifisch 
ist. 

15 9. Verfahren nach Anspruch 8, dadurch gekennzeichnet, daB die vorgegebenen 
Wegstrecken durch eine Speichereinheit zur Verfugung gestellt werden. 

10. Verfahren nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, 
daB das System zur Erkennung von Verkehrszeichen bei der Verarbeitung von durch 

2 0 einen Bildsensor gelieferten Bilddaten, diese auf das Vorhandensein von 
Verkehrszeichen untersucht, diese sodann extrahiert, in Ober- und Unterklassen 
separiert und in diesem Zusammenhang klassenspezifische Merkmalsdaten extrahiert, 
welche dann einer getrennten Klassifikation zugefuhrt werden. 

11. Verfahren nach Anspruch 10, dadurch gekennzeichnet, daB diese Klassifikation 
25 hierarchisch, in mehreren Klassifikationsstufen erfolgt. 

12. Verfahren nach Anspruch 11, dadurch gekennzeichnet, daB die 
Klassifikationsstufen im wesentlichen wie folgt gegliedert sind: 
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a) zuerst werden nur die der Oberklasse des Objektes zugehorigen 
Merkmalsdaten einem Klassifikator zugefuhrt , 

aa) bei erfolgreicher Klassifikation (die Klasse konnte mit hoher 
Wahrscheinlichkeit korrekt erkannt werden) werden die 

5 Merkmalsdaten durch die entsprechende in der Speichereinheit 

gespeicherte symbolische Darstellung der Oberklasse ersetzt. 

ab) bei erfolgloser Klassifikation (die Klasse konnte nicht mit hoher 
wahrscheinlichkeit korrekt erkannt werden) werden die 
Merkmalsdaten der Oberklasse und die Merkmalsdaten der 

10 Unterklasse durch die entsprechenden ursprunglichen vom Bildsensor 

stammenden Bilddaten ersetzt. 

b) war die Klassifikation der Oberklasse erfolgreich, werden nachfolgend die 
der Unterklasse des Objektes zugehorigen Merkmalsdaten einem 
Klassifikator zugefuhrt, 

15 ba) bei erfolgreicher Klassifikation (die Klasse konnte mit hoher 

Wahrscheinlichkeit korrekt erkannt werden) werden die 
Merkmalsdaten durch die entsprechende in der Speichereinheit 
gespeicherte symbolische Darstellung der Unterklasse ersetzt. 

bb) bei erfolgloser Klassifikation (die Klasse konnte nicht mit hoher 
20 wahrscheinlichkeit korrekt erkannt werden) werden die 

Merkmalsdaten der Unterklasse durch die entsprechenden 
ursprunglichen vom Bildsensor stammenden Bilddaten ersetzt. 



13. Vorrichtung zur Leistungssteigerung eines Systems zur Erkennung und/oder 
2 5 Anzeige von Verkehrszeichen, 

welches eine Kamera und eine damit verbundene Auswerteeinheit zur Bilderkennung 
und/oder zur Bildanzeige aufweist, 

dadurch gekennzeichnet, 
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das System mit mindestens einem kartenbasierten Navigationssystem und/oder einem 
Verkehrsinformationssystemen verbunden ist, um von ihnen stammende Informationen » 
bei der Erkennung und/oder der Anzeige von Inhalten von Verkehrszeichen ausnutzt* 



5 14. Vorrichtung nach Anspruch 13, dadurch gekennzeichnet, daB eine Verbindung fiber 
einen Fahrzeugdatenbus zwischen dem System zur Erkennung und/oder Anzeige von 
Verkehrszeichen den kartenbasierten Navigationssystemen und/oder 
Verkehrsinformationssystemen besteht. 

10 15. Vorrichtung nach Anspruch 13 oder 14, dadurch gekennzeichnet, daB das Systems 
zur Verkehrszeichenerkennung die Fahigkeit aufweist mit erhohter Leistung zu arbeiten, 
wenn auf Grundlage von kartenbasierten Informationen bekannt wird, daB das Fahrzeug 
einen Bereich passiert, der bezuglich der Erkennung von Verkehrszeichen problematisch 
ist. 

15 

16. Vorrichtung nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, 
daB dem kartenbasierten Navigationssystem beziehungsweise dem 
Verkehrsinformationssystem ein Datenspeicher bereitgestellt ist, in welchem die Art 
und/oder die Position und/oder der Zustand und/oder die Sichtbarkeit und/oder die 

20 GroBe des erkannten Verkehrszeichens gespeichert wird. 

17. Vorrichtung nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, 
daB dem System zur Erkennung von Verkehrszeichen ein Datenspeicher bereitgestellt 
ist, in welchem die Art und/oder die Position und/oder der Zustand und/oder die 
Sichtbarkeit und/oder die GroBe des erkannten Verkehrszeichens gespeichert wird. 

25 18. Vorrichtung nach einem der Anspruche 16 oder 17, dadurch gekennzeichnet, daB 
die Anzeigeeinheit einen Signalgebers umfaBt, welcher ein akustisches oder optisches 
Signal ausgibt, wenn sich entlang einer bereits einmal befahrenen Wegstecke eine 
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Anderung bzgl. der Position beziehungsweise des Vorhandenseins eines 
Verkehrszeichens ergibt. 

19, Vorrichtung nach einem der vorhergehend Anspruche, dadurch gekennzeichnet, daB 
5 ein Programm zur Anwendung einer Entscheidungslogik im System zur Erkennung 
und/oder Ausgabe von Verkehrszeichen ausgebildet ist, welches ausgehend von den 
kartenbasierten Navigationssystemen und/oder den Verkehrsinformationssystemen das 
Bild eines Verkehrszeichens solange angezeigt, bis eine vorgegebene Wegstrecke 
zuruckgelegt ist, welche vorzugsweise klassenspezifisch ist. 

10 20. Vorrichtung nach Anspruch 16, dadurch gekennzeichnet, daB eine Speichereinheit 
im System zur Erkennung und/oder Ausgabe von Verkehrszeichen ausgebildet ist, in der 
die vorgegebenen Wegstrecken gespeichert sind und durch welche sie einer 
Verarbeitung zuganglich gemacht werden. 

15 21. Vorrichtung nach einem der vorhergehenden Anspruche, dadurch gekennzeichnet, 
daB in dem System zur Erkennung von Verkehrszeichen eine Verarbeitungseinrichtung 
ausgebildet ist, welche die durch einen Bildsensor gelieferten Bilddaten diese auf das 
Vorhandensein von Verkehrszeichen untersucht, diese sodann extrahiert, in Ober- und 
Unterklassen separiert und in diesem Zusammenhang klassenspezifische 

20 Merkmalsdaten extrahiert und getrennt einem Klassifikator zufuhrt. 

22. Vorrichtung nach Anspruch 21, dadurch gekennzeichnet, daB dieser Klassifikator 
hierarchisch, in mehreren Klassifikationsstufen aufgebaut ist. 

23. Vorrichtung nach Anspruch 22, dadurch gekennzeichnet, daB die 
Klassifikationsstufen so aufgebaut sind, daB der Klassifikator die nachfolgende 

25 Funktionalitaten erfullt: 

a) zuerst werden nur die der Oberklasse des Objektes zugehorigen 
Merkmalsdaten einem Klassifikator zugefuhrt , 
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aa) bei erfolgreicher Klassifikation (die Klasse konnte mit hoher 
Wahrscheinlichkeit korrekt erkannt werden) werden die 
Merkmalsdaten durch die entsprechende in der Speichereinheit 
gespeicherte symbolische Darstellung der Oberklasse ersetzt. 

5 ab) bei erfolgloser Klassifikation (die Klasse konnte nicht mit hoher 

wahrscheinlichkeit , korrekt erkannt werden) werden die 
Merkmalsdaten der Oberklasse und die Merkmalsdaten der 
Unterklasse durch die entsprechenden ursprunglichen vom Bildsensor 
stammenden Bilddaten ersetzt. 

10 b) war die Klassifikation der Oberklasse erfolgreich, werden nachfolgend die 

der Unterklasse des Objektes zugehorigen Merkmalsdaten einem 
Klassifikator zugefuhrt, 

ba) bei erfolgreicher Klassifikation (die Klasse konnte mit hoher 
Wahrscheinlichkeit korrekt erkannt werden) werden die 

15 Merkmalsdaten durch die entsprechende in der Speichereinheit 

gespeicherte symbolische Darstellung der Unterklasse ersetzt. 

bb) bei erfolgloser Klassifikation (die Klasse konnte nicht mit hoher 
wahrscheinlichkeit korrekt erkannt werden) werden die 
Merkmalsdaten der Unterklasse durch die entsprechenden 

20 ursprunglichen vom Bildsensor stammenden Bilddaten ersetzt. 



